武大研究生,全国一等奖!
游戏建模、AI影像、智能客服......
数字人应用愈发广泛
图采难、成本高、材质失真......
武大人创想解决方案
快来和珞珞珈珈一起走近这支
在“华为杯”第五届
中国研究生人工智能创新大赛中
夺得一等奖的“材智先锋队”吧
01
数智结合,材赋新人
对于武汉大学计算机学院的江宇、李远珍、赵恩煦、陈泽政4名研究生来说,参加第五届中国研究生人工智能创新大赛,既是一项将多年研究落实为具体项目的实践挑战,也是一场经历过失败后破而后立的“战斗”。
此次大赛以“AI赋能、创新引领”为理念,是“中国研究生创新实践系列大赛”主题赛事之一。“材智先锋队”成员们在肖春霞、罗飞两位老师指导下,应用多种深度学习算法,化解人体几何重建和人体材质估计难题,最终成功开发出智材创想系统,通过创新算法以一种便捷的方式从图片或视频中构建出较高质量的数字人资产。凭借这一系统,“材智先锋队”从1778支队伍中脱颖而出,获得了全国一等奖(亚军)的优异成绩。
智材创想系统是一个轻量化、全自动、便携式写实数字人生成系统,相较于传统工业界需要大规模相机阵列,该系统只通过单个或少量手机、相机等移动设备拍摄人体外观图像集,就能进行几何重建、材质估计,并进行重光照和材质编辑等应用,进而生成高质量数字人模型。与传统的数字人建模系统相比,智材创想系统有三大新突破:
万象呈现,数据共振
以多元输入数据源为基石,构建功能更全面、更鲁棒的数字人生成系统。
几何塑造,真实再现
宽衣建模的几何技术,让数字人形象更生动、逼真。
材质分类,细节描摹
数字人的仿真衣物、细腻肌肤,视觉以假乱真。
目前项目团队已与华为、腾讯等知名企业合作,并在SIGGRAPH和CVPR等国际顶会顶刊中发表了多篇论文。
02
技术革新,突出重围
谈及项目初衷,队长江宇这样说道,“首先是顺应数字经济的时代风口,数字人市场的火爆反映了对建模技术更准确、更广泛的需求,因此我们想做一个更灵活、更精确、准入门槛更低的数字人生成系统,从而让更多普通人能够参与到虚拟现实发展的浪潮中来,为元宇宙构建出一份绵薄之力。”出于对动漫《凡人修仙传》的喜爱,江宇一直对建模方面的技术发展十分敏感,个人对ACG元素的兴趣也促进了该项目的落地实施。
在兴趣与责任心的双重驱动之下,江宇队长与其团队开始了对项目的研究。成功的道路并非一帆风顺,第一年参与竞赛时,同课题组的其他队伍都取得了不错的成绩,而自己的团队却在赛事中折戟。尽管努力没有得到收获,成员们却并没有困于负面情绪,经过短暂的失意后主动反思自身的不足,不断调整战略,改良技术,确定更加明晰的目标并不断沉淀自我,为之后“重回赛场”夯实基础。
在今年课题老师提出组队参赛建议时,队长江宇不假思索地坚持原班人马,队员们也积极回应了这份相互间的信心和信任。“当时心里还是想争口气,我们把彼此完全托付给对方,想要证明我们是有能力的。”江宇回忆道。
在与志同道合伙伴们的一同努力下,团队遇见一个难题,解决一个难题。在系统开发的过程中,成员需要弥补物理光学基础知识的不足;在前沿技术学习过程中,还面临现有数据集样本数据的缺失等问题。关关难过关关过,队员们知难而上,针对已有研究空白,开发出材质估计扩散模型,研发出体素+TSDF结合的方法、物理动力学思想构建动态几何重建模型等,创新性地解决了实践中碰到的问题,实现了前所未有的技术突破。
除了学术难题需要攻克,再战还给队员们带来了前所未有的心理的压力。队员们彼此相互鼓励,导师们也给予了许多技术支持和改进建议,“有任何困难及时提出来,大家都会帮助你们,不要自己闷头硬扛”的暖心话语让艰难备赛阶段的成员们感念铭记在心。
收获了多方的支持、历经一年的韬光养晦,团队破釜沉舟,通过一次次的技术革新突出重围,在“华为杯”第五届中国研究生人工智能创新大赛中取得了全国一等奖(亚军)的好成绩。
03
凝聚合力,开拓创新
在交流过程中,江宇队长感慨道,“如果要给成功的要素做一个价值排序,那么我认为是合作>技术>思维方式”。合作能将各个队员的特长结合,充分发挥出1+1>2的效果,也有助于在共同复盘的时候弥补缺漏,找出症结所在。“我们很享受备赛期间把后背托付给队友的过程,这是一种高度的信任”,无论结果怎样,备赛过程中共克难关的经历都将成为队员们宝贵的回忆。
经历过“失败”,因此更知“成功”的不易,材智先锋队的成员们拥有着更深刻和宝贵的经验教训,也针对解决信息时代科学研究的共性问题提出了自己的理解和建议。
江宇
先锋队长
保持“问题意识”很重要,重视自身的不足同时直面研究难点,聚焦本质并明晰了症结所在,建立起解决问题的逻辑框架,多层次有重点地拆分问题,从而更好地落实相应的解决措施,这样有助于更高效地解决问题。
李远珍
产品Pro
在系统的研发过程中需要不断求并,做好项目的背调、优化工作。为了完成理论的创新和技术的突破,反复的实验是必不可少的,在实践当中复盘总结失败的原因,并通过借鉴和模仿,对已有方法论进行复现和理论论证,才能更好地扬长避短裨补阙漏。
赵恩煦
pre王者
在保证团队具备科研实力的同时,在答辩中做到台风稳健、逻辑表达清晰也是取胜不可或缺的一环。比赛除了要看硬实力,内容输出的软实力也是很关键的,掌握技术交流的话语权也是尤为重要的。
陈泽政
细节大师
项目落地过程中要深入调研、注重产学结合,避免研究浮于表面。只有紧贴需求侧搞研发,才能为项目明晰更精确的发展方向。
开辟多源数据,优化模型材质
升级信息化产业,助力数字人推广
珞珈学子用不懈奋斗书写青春力量用技术创新尽责国家所需创心之所想,“智”造美好未来擦亮青春底色,展示青年风采
·推荐阅读·
武大版“亲爱的翻译官”,真飒!
假期还剩两天,一键返校!
武大动物园,这些你都看到了吗?
● 武大版“亲爱的翻译官”,真飒!
● 武大樱花反季开放?是真的!
● 假期还剩两天,一键返校!
● 武大动物园,这些你都见过吗?
● 据说,武大师生跟着他吃食堂?!
● 不要上当!不要上当!不要上当!
感谢武汉大学计算机学院
图片来自受访者
采访&文字:刘恺迪 张语为
编辑:张富华 张一芃
责编:贾艺真
审核:邢知博
投稿邮箱:whu_luojiahao@163.com
给获奖小队点个“赞”,再点个“在看”